Apprentice Bard, la réponse de Google a ChatGPT, donne une mauvaise réponse lors d'une démo de présentation,

Ce qui coûte à Alphabet environ 140 milliards de dollars de sa capitalisation boursière

Près de 7,4% de la valeur marchande d'Alphabet (quelque 140 milliards de dollars) a été effacé cette semaine après que Google a fièrement présenté Bard, sa réponse aux offres d'IA de nouvelle génération de Microsoft. La raison ? Le système a raté une simple question. Dans une vidéo promotionnelle pour montrer Bard, un assistant de recherche Web pour concurrencer Bing amélioré par ChatGPT de Microsoft, le logiciel a répondu de manière incorrecte à une question scientifique, faisant baisser le cours de l'action d'Alphabet.

L'erreur de Bard a été révélée quelques heures seulement avant que Google organise son premier événement pour Bard à Paris. En plus, le haut dirigeant Prabhakar Raghavan a promis que le chatbot permettrait aux utilisateurs de parcourir les informations de « toutes nouvelles façons ».

La capacité de ChatGPT à proposer une réponse concise et fidèle à une question pourrait faire gagner aux utilisateurs le temps qu'ils passent généralement à parcourir les liens sur Google pour trouver la même information. D'ailleurs, Microsoft a intégré une version améliorée de ChatGPT à certains de ses produits à l'instar de Teams ou de Bing, pour avoir une plus value sur la concurrence.

Pour ne pas être en reste, Google a accéléré son travail sur Apprentice Bard, l'une de ses réponses à ChatGPT.

Google a beaucoup investi dans des fonctionnalités alimentées par l'IA telles que Magic Eraser, Photo Unblur et Google Assistant pour sa gamme de téléphones Pixel. Ces efforts de R&D étendus touchent tous les aspects de son activité, comme la recherche, Adsense, les chatbots et même quelques démos amusantes. Avec la soudaine montée en puissance de ChatGPT, soutenue par Microsoft, au cours des derniers mois, Google est maintenant à bout de souffle et l'industrie est curieuse de voir comment elle réagira. Un nouveau rapport basé sur des informations privilégiées, des notes de service du personnel et des exemples de travaux de développement montre que l'entreprise s'efforce de créer un équivalent ChatGPT intégré à Search.

Concernant Apprentice Bard, des membres anonymes du personnel ont expliqué aux médias que l'implémentation ressemble à ChatGPT (le bot fournit des réponses détaillées aux invites et aux questions des utilisateurs). Cependant, au lieu d'utiliser le code GPT-3.5 développé par Microsoft ci-dessous, Bard utilise LaMDA (ou Language Model for Dialogue Applications), le modèle de langage de Google pour l'application de dialogue.

LaMDA est le système de Google pour créer des chatbots basés sur ses grands modèles de langage les plus avancés, ainsi appelés parce qu'ils imitent la parole en ingérant des milliards de mots provenant d'Internet. La grande enseigne de la recherche a présenté publiquement LaMDA à l'édition 2021 de la Google I/O, sa conférence dédiée aux développeurs, avec l'objectif d'améliorer ses assistants d'intelligence artificielle conversationnelle et de rendre les conversations plus naturelles. La société utilise déjà une technologie de modèle de langage similaire pour la fonctionnalité Smart Compose de Gmail ou pour les requêtes des moteurs de recherche.

Ces dernières semaines, Google a demandé à davantage d'employés de donner un coup de main à mesure que l'IA s'améliore : « à la suite de ChatGPT, l'équipe LaMDA a été invitée à donner la priorité au travail sur une réponse à ChatGPT », est-on indiqué sur une note interne consultée par un quotidien américain. « À court terme, cela prend le pas sur d'autres projets », est-il marqué dans la suite du courriel, avertissant que certains salariés cessent d'assister à certaines réunions sans rapport avec LaMDA.

Il faut dire que Google prévoit d'améliorer son moteur de recherche en s'appuyant sur Bard. Les images provenant des processus de test de l'entreprise montrent une interface repensée en cours d'élaboration, incorporant les réponses d'Apprentice Bard dont l'objectif est de donner l'impression qu'une personne réelle répond à vos requêtes de recherche.

L'un des principaux facteurs qui différencient Bard de ChatGPT est la capacité du premier à répondre en s'appuyant sur des données actuelles, en se tenant au courant des actualités et des tendances. Le bot a cité des données datant de janvier 2023 lors de tests internes, tandis que les ingénieurs de ChatGPT avouent avoir interrompu la formation du modèle d'IA en 2021.

Apprentice Bard a remplacé Meena, une version précédente d'un bot de chat intelligent qui avait été lancée en interne mais a ensuite été abandonnée. Les employés ont remarqué que les réponses d'Apprentice Bard devenaient plus avancées ces dernières semaines.

Le chatbot IA de Google, Bard, fait une erreur factuelle dans la première démo

Lundi, Google a annoncé son chatbot AI Bard. Mais le bot n'a pas pris un bon départ, les experts notant que Bard a fait une erreur factuelle dans sa toute première démo.

Un GIF partagé par Google montre Bard répondant à la question : « De quelles nouvelles découvertes du télescope spatial James Webb puis-je parler à mon enfant de 9 ans ? » Bard propose une liste à puces de trois éléments, parmi lesquels un élément indiquant que le télescope « a pris les toutes premières images d'une planète en dehors de notre propre système solaire ».


Cependant, un certain nombre d'astronomes sur Twitter ont souligné que c'était incorrect et que la première image d'une exoplanète avait été prise en 2004 - comme indiqué sur le site Web de la NASA (voir en source) : « Ce n'est pas pour faire mon connard (en fait, si finalement) et je suis sûr que Bard sera impressionnant, mais pour mémoire : JWST n'a pas pris 'la toute première image d'une planète en dehors de notre système solaire' », a tweeté l'astrophysicien Grant Tremblay.

[TWITTER]<blockquote class="twitter-tweet"><p lang="en" dir="ltr">Not to be a ~well, actually~ jerk, and I'm sure Bard will be impressive, but for the record: JWST did not take "the very first image of a planet outside our solar system". <br><br>the first image was instead done by Chauvin et al. (2004) with the VLT/NACO using adaptive optics. <a href="https://t.co/bSBb5TOeUW">https://t.co/bSBb5TOeUW</a> <a href="https://t.co/KnrZ1SSz7h">pic.twitter.com/KnrZ1SSz7h</a></p>— Grant Tremblay (@astrogrant) <a href="https://twitter.com/astrogrant/status/1623091683603918849?ref_src=twsrc%5Etfw">February 7, 2023</a></blockquote> <script async src="https://platform.twitter.com/widgets.js" charset="utf-8"></script> [/TWITTER]

Bruce Macintosh, directeur des observatoires de l'Université de Californie à l'UC Santa Cruz, a également souligné l'erreur. « Parlant en tant que quelqu'un qui a pris en photo une exoplanète 14 ans avant le lancement de JWST, j'ai l'impression que vous devriez trouver un meilleur exemple ? ».


Dans un tweet de suivi, Tremblay a ajouté: « J'aime et j'apprécie que l'une des entreprises les plus puissantes de la planète utilise une recherche JWST pour annoncer son LLM. Génial! Mais ChatGPT, etc., bien qu'impressionnant, est souvent très confiant dans l'erreur. Cela sera intéressant de voir un avenir où les LLM vérifient eux-mêmes les erreurs ».

Comme le note Tremblay, un problème majeur pour les chatbots IA comme ChatGPT et Bard est leur tendance à déclarer avec confiance des informations incorrectes comme des faits.

Plutôt que d'interroger une base de données de faits avérés pour répondre à des questions, ils sont formés sur d'énormes corpus de texte et analysent des modèles pour déterminer quel mot suit le suivant dans une phrase donnée. En d'autres termes, ils sont probabilistes et non déterministes (un trait qui a conduit un éminent professeur d'IA à les qualifier de « générateurs de conneries »).

Un impact sur la capitalisation boursière

Mercredi, Google a tenu une conférence de presse très attendue depuis Paris qui n'a pas abouti à la décision décisive contre ChatGPT et le partenariat Microsoft-OpenAI que de nombreux experts attendaient. Au lieu de cela, Google a parcouru une collection de technologies précédemment annoncées dans une présentation discrète qui incluait la perte d'un téléphone de démonstration.

La démo, qui comprenait des références à de nombreux produits qui ne sont toujours pas disponibles, s'est produite quelques heures seulement après que quelqu'un a remarqué que la publicité de Google pour son nouveau modèle de grand langage Bard contenait une erreur sur le télescope spatial James Webb. Après que Reuters ait signalé l'erreur, Forbes a remarqué que le cours de l'action de Google avait baissé d'environ 7,4%, entraînant la diminution de la capitalisation boursière d'environ 140 milliards de dollars.

Sur scène devant un petit public en personne à Paris, le vice-président principal de Google, Prabhakar Raghavan, et la vice-présidente de Google Search, Liz Reid, ont présenté à tour de rôle une série de produits comprenant la "multirecherche", une fonctionnalité de recherche visuelle alimentée par l'IA de Google Lens qui permet aux utilisateurs de rechercher en prenant une photo et en décrivant ce qu'ils aimeraient trouver, une...